4d3721d88fc176686e5c9bbcdb83b98c29465bc8
5

 

challenge
Reading Comprehension
submitter
Krzysztof Wróbel
submitted
2024-10-14 15:34:32.189007 UTC
file basename
out

test-B / aa4a8f75ce523cb0520fa152625b4895fbe71af5
Metric Score
Score 80.09
Levenshtein 82.24
Answerability 77.94

test-A / a4a51e22d42fea8eb33cd0826be9c797ed7330f5
Metric Score
Score 82.36
Levenshtein 85.64
Answerability 79.09

dev-0 / d9677caf11164b7724d885eeccda3ed5e7c79ae1
Metric Score
Score 80.43
Levenshtein 83.42
Answerability 77.44

worst items

note: the gold standard is taken from the challenge
# input expected output actual output test-A Score
1 18093_0_4 nie nie NaN
2 8954_0_4 best of activision 0.00
3 8949_0_2 lokalni politycy sld 0.00
4 8031_0_4 2004 0.00
5 8135_0_3 tak 0.00
6 9033_0_2 danie obywatelom prawa do noszenia broni i zwolnienie z więzień wszystkich więźniów 0.00
7 7947_0_3 na pieczęciach 0.00
8 1421_1_3 kmdr jerzemu kłossowskiemu (szefowi oddziału mw przy mon) i kmdr adamowi mohuczy (zastępcy szefa sztabu głównego marynarki wojennej) 0.00
9 4865_0_3 major chagaj ronen 0.00
10 92_0_4 dwóch 0.00
11 3899_0_0 żadnymi 0.00
12 3899_0_1 lotos trefl gdańsk 0.00
13 6066_0_2 co ma stanowić nawiązanie do wiadomości rozsyłanych przez esterę i mardocheusza do współwyznawców 0.00
14 1784_0_3 vhl ulega ekspresji w kanaliku proksymalnym 0.00
15 4491_0_1 65 0.00
16 1709_0_3 w południowo-zachodniej 0.00
17 3902_1_0 tak 0.00
18 1804_0_2 ok. 1390 0.00
19 4910_0_4 mihailo uvalin 0.00
20 6172_1_3 tak 0.00
21 5423_0_4 świergotek szponiasty 0.00
22 6164_0_3 tak 0.00
23 41_0_3 zwolenników rządu i działaczy ruchu oporu 0.00
24 5112_0_3 wagnera 0.00
25 5503_0_3 70 0.00
26 5503_0_4 tak 0.00
27 2917_0_2 nie zorganizowano kolejnej gali na których miały się odbyć półfinały turnieju 0.00
28 5081_0_0 inwazją lisa 0.00
29 2381_0_3 pis 0.00
30 3583_0_3 200 000 0.00
31 4760_0_0 wanda rutkiewicz 0.00
32 2733_1_3 2015 0.00
33 1447_0_4 pozostawionych przez nefiego 0.00
34 2811_0_3 zamierzał wydać ją za jednego ze swoich bojarów 0.00
35 2234_0_3 po tych wydarzeniach pancernik pozostawał w puli aż do czerwca 1918 roku 0.00
36 1858_1_0 nie 0.00
37 4864_0_1 w ekalaka w montańskim hrabstwie carter 0.00
38 4710_0_2 wdrażała w szkołach programy edukacyjne i prozdrowotne, w tym finansowane ze środków unii europejskiej 0.00
39 4739_0_4 2010 0.00
40 4256_0_0 grand prix niemiec 2011 0.00

Compare with other submission